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SIGNAL ET APPLICATIONS CORRESPONDANTES. 

L'invention concerne un proc&te de codage d'une 
image & laquelle est associ§ un maillage hterarchique, met- 
tant en oeuvre un codage dudit maillage par ondelettes. 

Selon ['invention, un tel proced6 de codage met en 
oeuvre au moins deux types d'ondelettes appliquees selec- 
tivement k des zones distinctes de ladite image. 
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Procede de codage d'une image par ondelettes, procede de decodage, 
dispositifs, signal et applications correspondantes. 

Le domaine de l'invention est celui du codage d'images fixes ou anim&s, 
et notamment, mais non exclusivement, du codage d'images successives d'une 

5 sequence vid6o. Plus precisdment, V invention concerne une technique de 
codage/d6codage d'images auxquelles sont associSes un maillage, et mettant en 
ceuvre une methode dite "k ondelettes". L'invention s'applique plus 
particulierement, mais non exclusivement aux ondelettes de 2 feme g6n6ration, 
presentees notamment dans le document de Wim Sweldens, intitule "The Lifting 

10 Scheme : A Construction of Second Generation Wavelets" (en fran?ais, "Le 
proc6d6 d'etevation : une construction des ondelettes de deuxieme generation"), 
SIAM Journal on Mathematical Analysis, Volume 29, number 2, pp 511-546, 
1998. 

Avec le dSveloppement de nouveaux reseaux de transmission (xDSL, 
15 mobiles avec le GPRS et TUMTS, etc.), les techniques de codage d'images et de 
compression de videos num£riques doivent s 1 adapter a Theterog&i&te des rSseaux 
ainsi qu'aux fluctuations possibles de la qualite de service (QoS) au cours du 
temps. La prise en consideration de tous ces facteurs au niveau du codage 
d'images fixes ou animees doit permettre de fournir a Putilisateur final une qualite 
20 visuelle optimale. 

On connait h ce jour plusieurs techniques de codage d'images, comme les 
techniques de codage par prediction temporelle et transformation en cosinus 
discrets bases sur une structure de blocs, telles que proposees par les organismes 
de normalisation ISO/MPEG (en anglais "International Organization for 
25 Standardization/Moving Picture Coding Expert Group", en frangais "Organisation 
Internationale de Standardisation/Groupe d'Experts pour le Codage d'images 
Animees") et/ou ITU-T (en anglais "International Telecommunication Union- 
Telecommunication Standardization Sector", en fran?ais "Union Internationale de 
Telecommunications-Secteur de standardisation des telecommunications"). 
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On connait egalement des techniques de codage proprietaires basees sur un 
codage par transform^ DCT sur des blocs (Microsoft avec Windows Media, 
RealMedia avec Real One, Divx (marques d£pos6es), etc.), ou encore certaines 
techniques de codage par ondelettes ou maillages, telles que pr6sent6es 

5 notamment dans les demandes de brevets fran?ais n°2 781 907 intitulee "Procede 
de codage d'un maillage source tenant compte des discontinuity, et applications 
correspondantes" et n° 2 825 855, intitule "Precedes et dispositifs de codage et 
de d6codage d'images mettant en oeuvre des maillages emboit6s, programme, 
signal et application correspondantes" au nom du meme titulaire que la pr&ente 

10 demande de brevet. 

Cependant, ces differentes techniques de codage d'images connues 
prfsentent de nombreux inconv£nients, notamment pour les applications ou les 
reseaux de transmission a tres bas debit. 

Ainsi, les techniques de codage basees blocs conduisent a I'apparition de 

15 forts effets, ou artefacts, qui r&luisent fortement la qualite visuelle de la restitution 
de Timage. Les codages de type MPEG-4 ou ITU-T/H.263 sont d<Ssormais 
considers comme ayant atteint leurs limites, notamment a cause de la structure de 
blocs rigides de taille fixe, utilisee comme support de l'ensemble des calculs et 
operations de codage. De m§me, pour les techniques mettant en oeuvre des 

20 ondelettes, un effet de sur-oscillation, encore appele en anglais "ringing M , donne 
un rendu flou, ainsi que Timpression, tres desagr&ible pour l'utilisateur, de 
« voir » Tondelette sur Timage. 

Pour les applications ou les reseaux de transmission de debits plus elev6s, 
ces differentes techniques ne permettent pas d'atteindre la limite en efficacitd de 

25 codage. 

Enfin, aucune de ces techniques de Tart anterieur ne permet d'optimiser le 
codage d'une image, en tenant compte des caract&ristiques intrins&ques de cette 
derniere. 

En outre, dans le cadre du codage de sequences video, et dans un souci de 
30 reduction du volume de donn6es transmises et cod6es, on proc&de couramment en 
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calculant une image d'erreur, comme la soustraction d'une image originate de la 
sequence et d'une image interpolee, ou determinee par estimation/compensation 
de mouvement. On pourra se i£f6rer par exemple & la demande de brevet frangais 
n°00 10917 intitulee "Proc^de de construction d'au moins une image interpolee 
5 entre deux images d'une sequence animSe, precedes de codage et de decodage, 
signal et support de donn6es correspondants" au nom du meme titulaire que la 
presente demande de brevet. 

Or aucune des techniques de codage connues n'est adapt£e au contenu 
sp&ifique de telles images d'erreurs, qui ne contiennent g6n6ralement que des 
10 hautes frequences, telles que des contours, des textures, ou encore des 
singularites. 

L'invention a notamment pour objectif de pallier ces inconvenients de Tart 
anterieur. 

Plus pr&isement, un objectif de Pinvention est de fournir une technique de 
15 codage d'images fixes ou animees permettant d r optimiser le r&ultat du codage par 
rapport aux techniques de Tart ant&ieur. 

Un autre objectif de l'invention est de mettre en ceuvre une telle technique, 
qui permette de reduire le volume des donn^es issues du codage, et done 
eventuellement transmises par un reseau de communication jusqu'au dispositif de 
20 decodage et de restitution de l'image. 

L'invention a Sgalement pour objectif de mettre en ceuvre une telle 
technique qui soit M 6chelonnable", e'est-i-dire qui s'adapte aux fluctuations des 
rdseaux de transmission, et notamment aux variations de debit de tels reseaux. 

L'invention a aussi pour objectif de fournir une telle technique qui 
25 permette une transmission k bas ddbit des informations de codage d'une image ou 
d'une sequence d'images. 

Un autre objectif de Tinvention est de mettre en oeuvre une telle technique 
qui permette d'atteindre une bonne qualite visuelle de restitution de l'image cod6e, 
et notamment des zones de discontinuite de cette image. 



2849329 



L'invention a dgalement pou objectif de fournir une telle technique qui soit 
bien adapt£e au codage d'images d'erreur. 

L'invention a encore pour objectif de fournir une telle technique qui soit 
simple et peu coflteuse & mettre en ceuvre. 
5 Ces objectifs, ainsi que d'autres qui apparaitront par la suite, sont atteints & 

Taide d'un proc£d£ de codage d'une image & laquelle est associe un maillage 
hierarchique, mettant en oeuvre un codage dudit maillage par ondelettes. 

Selon l'invention, un tel procede de codage met en ceuvre au moins deux 
types d'ondelettes appliqu£es s£lectivement & des zones distinctes de ladite image. 

10 Ainsi, l'invention repose sur une approche tout a fait nouvelle et inventive 

du codage d'images fixes ou anim£es, et notamment du codage d'images d'une 
sequence video. En effet, l'invention propose non seulement de coder les images 
selon la technique innovante des ondelettes, et notamment des ondelettes de 
deuxi&me generation telles qu'introduites par W. Dahmen ("Decomposition of 

15 refinable spaces and applications to operator equations", Numer. Algor., N°5, 
1993, pp.229-245, en fran^ais "decomposition d'espaces pouvant Stre raffin6s et 
applications aux equations d'opSrateur") et J. M. Carnicer, W. Dahmen et IM. 
Pena ("Local decomposition of refinable spaces", Appl. Comp. Harm. Anal. 3, 
1996, pp. 127-153, en fran?ais "decomposition locale d'espaces pouvant etre 

20 raffin6s"), mais egalement d'optimiser un tel codage, en appliquant des types 
d'ondelettes differents k des zones distinctes de l'image. 

En effet, les inventeurs de la presente demande de brevet ont mis en 
Evidence le fait que les differents types d'ondelettes existantes presentent des 
propri6tes de codage distinctes. lis ont done eu l'id£e d'exploiter ces diff£rentes 

25 proprietes, en appliquant, aux differentes zones d'une image, le type d'ondelettes 
dont les propriet6s de codage sont les mieux adaptees au contenu de chacune des 
zones. 

On optimise ainsi le codage global de l'image, en adaptant le codage par 
ondelettes a des regions de l'image de caracteristiques differentes, et en utilisant, 
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si necessaire, plusieurs types d'ondelettes distinctes pour le codage d'une meme 
image. 

Preferentiellement, un tel proced6 de codage comprend les etapes 
suivantes : 

5 - une £tape de partitionnement de ladite image en au moins deux zones de 
natures distinctes, la nature d'une zone 6tant fonction d'au moins un 
param&tre caracteristique dudit maillage dans ladite zone ; 
pour chacune desdites zones, une 6tape d'affectation, au moins en fonction 
de ladite nature, d'un type d'ondelettes permettant d'optimiser ledit codage 
10 dudit maillage de ladite zone. 

On comprendra bien sur que, dans le cas ou l'image est homog^ne, en ce 
sens que toutes les zones de cette image sont de meme nature, on ne partitionne 
pas l'image, mais on procfcde directement & l'affectation, b 1'ensemble de l'image, 
du type d'ondelettes permettant d'optimiser le codage de l'image dans son 
15 integrality 

Avantageusement, ledit parametre caracteristique dudit maillage tient 
compte de la densite dudit maillage dans ladite zone. 

En effet, la density du maillage en un point de la zone, et dans une region 
englobant ce point, permet par exemple de determiner si la zone consid6r£e est 
20 une zone de texture, de contour, ou de singularity, comme il sera d£crit plus en 
d6tail par la suite dans ce document. 

Selon une caracteristique avantageuse de l'invention, ladite nature de ladite 
zone appartient au groupe comprenant : 
au moins un type de texture ; 
25 - au moins un type de contour ; 

au moins un type de singularity ; 
- au moins un type de couleur ; 

au moins un type de forme. 
Selon une caracteristique pr£ferentielle de l'invention, lesdits types 
30 d'ondelettes appartiennent au groupe comprenant : 
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les ondelettes de Loop ; 
les ondelettes de Butterfly ; 
les ondelettes de Catmull-clark ; 
les ondelettes affines. 

5 L'Homme du Metier comprendra aisement que l'invention ne se limite pas 

aux seuls types d'ondelettes indiquSs ci-dessus, qui ne sont pr6sent6es qu'k titre 
illustratif. 

De maniere avantageuse, un tel procedS de codage comprend, pour 
chacune desdites zones, une etape ^application audit maillage de coefficients 
10 dudit type d'ondelettes affects h ladite zone, tenant compte d'une valeur scalaire 
associee audit maillage en un point de mise & jour de ladite zone et de ladite 
valeur scalaire associee audit maillage en au moins certains points voisins dudit 
point demise &jour. 

Preferentiellement, ladite valeur scalaire represente un parametre dudit 
15 maillage appartenant au groupe comprenant : 
la luminance dudit maillage ; 

au moins une composante de chrominance dudit maillage. 
Ainsi, on se place par exemple au point ^application du maillage (ou point 
de mise a jour), et on considere une composante de la chrominance en ce point. 
20 On 6tudie alors la valeur de cette meme composante de chrominance aux points 
voisins de ce point de mise a jour, pour appliquer en consequence les coefficients 
d'ondelettes (par ponderation), ainsi que presente plus en detail par la suite en 
relation avec les figures 7a a 7d. 

De manure pr6f6rentielle, un tel proc6d6 de codage comprend en outre une 
25 &ape de codage desdits coefficients d f ondelettes mettant en oeuvre une technique 
appartenant au groupe comprenant : 

une technique de type zero-tree ; 
une technique de type EBCOT. 
Avantageusement, ladite image appartenant a une sequence d'images 
30 successives, ledit proc6d6 comprend en outre une 6tape de comparaison desdits 
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coefficients d'ondelettes de ladite image aux coefficients d'ondelettes d'au moins 
une image pr6cedente ou suivante de ladite sequence, de fa$on a eviter de mettre 
en ceuvre ladite 6tape de codage pour des coefficients d'ondelettes de ladite image 
identiques k ceux de ladite image pr6c6dente ou suivante. 
5 On r£duit ainsi le volume des donn6es transmises, ce qui est 

particulierement avantageux dans le cas de r6seaux de transmission & bas debit, ou 
pour les terminaux de restitution de faible capacite. Pour les coefficients 
d'ondelettes identiques aux coefficients pr6c6demment transmis pour une autre 
image, on peut se contenter de transmettre un ensemble de z£ros, ainsi qu'une 

10 reference permettant d'indiquer oh les coefficients d'ondelettes peuvent etre 
trouves (par exemple, une reference h l'image pr6c£dente pour laquelle ces 
coefficients ont d6j& 6t6 re$m par le dispositif de d6codage). 

De maniere avantageuse, un tel proc£d£ de codage permet de coder une 
s6quence d'images successives, et ladite image est une image d'erreur, obtenue par 

15 comparaison d'une image originale de ladite sequence et d'une image construite 
par estimation/compensation de mouvement, ladite image comprenant au moins 
une region d'erreur & coder et eventuellement au moins une region sensiblement 
vide. 

Bien sur, dans le cas ou l'image originale est absolument identique a 
20 l'image estimee, l'image d'erreur est vide, et ne comprend done pas de region 
d'erreur a coder. Inversement, si l'image originale differe en tout point de l'image 
estimee, l'image d'erreur ne comprend pas de region vide. 

De mani&re preferentielle, ladite etape de partitionnement comprend une 
6tape de detection desdites regions d'erreur de ladite image par seuillage, 
25 permettant de determiner au moins une region de ladite image prdsentant une 
erreur superieure J un seuil predetermine. 

Ce seuil peut etre parametrd en fonction des contraintes de l'application ou 
du reseau de transmission consider^, ou encore en fonction de la quality de 
restitution que Ton souhaite obtenir. 



8 



2849329 



Selon une premise variante de realisation avantageuse de l'invention, 
ladite 6tape de partitionnement comprend egalement une tape de regroupement 
d'au moins certaines desdites regions d'erreur dtataes par blocs de forme 
parall61ipip6dique. 

5 Preferentiellement, ladite tape de partitionnement comprend une tape de 

creation desdites zones de ladite image sous forme d'ensembles de blocs de mgme 
nature. 

On applique ainsi un meme traitement par ondelettes & tous les blocs de 
meme nature de l'image, meme si ces blocs sont distants les uns des autres au sein 
10 de l'image. 

Selon une deuxieme variante de realisation avantageuse de l'invention, 
ladite tape de partitionnement comprend une tape de cr6ation desdites zones de 
ladite image a partir desdites regions d'erreur detectees, mettant en ceuvre une 
technique de type quadtree. 

15 L'invention concerne 6galement un precede" de decodage d'une image a 

laquelle est associe" un maillage hitarchique cod6 par ondelettes, mettant en 
ceuvre un d6codage selectif de zones distinctes de ladite image, en fonction 
d'informations relatives a un type d'ondelettes affecte" au codage du maillage de 
chacune desdites zones. 

20 Ainsi, l'image ayant 6t6 partitionnee lors du codage en au moins deux 

zones de natures distinctes, et la nature d'une zone etant fonction d'au moins un 
parametre caractenstique dudit maillage dans ladite zone, le procede de decodage 
de l'invention comprend les Stapes suivantes : 

- une <Stape d'extraction, au sein d'un flux repr&entatif de l'image codee, 
25 d'informations relatives au type d'ondelettes affecte au codage du maillage de 

chacune des zones ; 

- pour chacune des zones, une dtape de decodage, en fonction de telles 

informations, du maillage de la zone. 

L'invention concerne aussi un dispositif de codage d'une image h. laquelle 
30 est associe un maillage hierarchique, mettant en ceuvre des moyens de codage 
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dudit maillage par ondelettes, et comprenant des moyens ^application selective 
d'au moins deux types d'ondelettes & des zones distinctes de ladite image. 

Le dispositif de codage de l'invention comprend done les moyens 
suivants : 

5 - des moyens de partitionnement de l'image en au moins deux zones de 

natures distinctes, la nature d'une zone etant fonction d'au moins un paramdtre 
caracteristique du maillage dans la zone ; 

des moyens, mis en oeuvre pour chacune des zones, d'affectation, en 
fonction de la nature de la zone, d'au moins un type d'ondelettes permettant 

10 d'optimiser le codage du maillage de la zone. 

L'invention concerne encore un dispositif de decodage d'une image & 
laquelle est associe un maillage hierarchique cod6 par ondelettes, comprenant des 
moyens de decodage selectif de zones distinctes de ladite image, en fonction 
d'informations relatives & un type d'ondelettes affecte au codage du maillage de 

1 5 chacune desdites zones. 

Ladite image ay ant ete partitionn£e lors du codage en au moins deux zones 
de natures distinctes, et la nature d'une zone 6tant fonction d'au moins un 
parametre caracteristique du maillage dans la zone, le dispositif de decodage de 
l'invention comprend done les moyens suivants : 

20 - des moyens d'extraction, au sein d'un flux representatif de l'image 

codee, d'informations relatives & un type d'ondelettes affecte au codage du 
maillage de chacune des zones ; 

pour chacune des zones, des moyens de d6codage, en fonction de 
telles informations, du maillage de la zone. 

25 L'invention concerne 6galement un signal repr6sentatif d'une image & 

laquelle est associe un maillage hierarchique code par ondelettes. Selon 
Tinvention, au moins deux types d'ondelettes ay ant 6te appliques s61ectivement & 
des zones distinctes de ladite image lors du codage, un tel signal vehicule des 
informations relatives audit type d'ondelettes affect^ au codage du maillage de 

30 chacune desdites zones. 
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L'image ayant 6te partitionn6e, lors du codage en au moins deux zones de 
natures distinctes, et la nature d'une zone etant fonction d'au moins un parametre 
caracteristique du maillage dans la zone, le signal de 1'invention v6hicule done des 
informations relatives a un type d'ondelettes affecte au codage du maillage de 
5 chacune des zones. 

Avantageusement, un tel signal est structur6 sous forme de paquets 
associ6s chacun a Tune desdites zones de ladite image, chacun desdits paquets 
comprenant les champs suivants : 

- un champ indicatif d'un d6but de paquet ; 

10 - un champ v6hiculant un identifiant dudit paquet ; 

un champ d'en-tete ^informations (en anglais "information header") ; 

- un champ comprenant lesdites informations relatives audit type 
d'ondelettes affecte & ladite zone ; 

- un champ comprenant des coefficients d'ondelettes appliques audit 
1 5 maillage de ladite zone ; 

- un champ relatif a la forme dudit maillage de ladite image ; 

- un champ indicatif d'une fin de paquet. 
PrSferentiellement, ledit champ d'en-tete d'informations comprend : 

- un sous-champ relatif au nombre de coefficients d'ondelettes de ladite 

20 zone ; 

un sous-champ indiquant ladite zone de ladite image, en fonction de 
ladite forme dudit maillage ; 

- un sous-champ relatif au nombre de plans de bits mis en ceuvre pour 
lesdits coefficients d'ondelettes. 

25 L'invention concerne encore l'application du procSde de codage et du 

procede de decodage decrits precedemment a Tun au moins des domaines 
appartenant au groupe comprenant : 

- le "streaming" vid<So (en fran?ais, "emission d'un flux video") ; 
le stockage des videos ; 

30 - la visioconference ; 
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- la video a la demande (en anglais VOD pour "Video On Demand") ; 
les mels vid6o. 

D'autres caracferistiques et avantages de 1'invention apparaitront plus 
clairement a la lecture de la description suivante d'un mode de realisation 
5 preferentiel, donne a titre de simple exemple illustratif et non limitatif, et des 
dessins annexes, parmi lesquels : 

les figures la et lb rappellent les sclfemas generaux de decomposition 
lifting, telle que decrite notamment par W. Sweldens "The Lifting 
Scheme : A New Philosophy in Bi Orthogonal Wavelets Constructions", 
10 Proc. SPIE 2529, 1995, pp 68-69 (en francais "Le schema "lifting": une 

nouvelle philosophic pour les constructions par ondelettes bi- 
orthogonales") ; 

la figure 2 illustre le principe general de 1'invention, reposant sur le choix 
de transformations par ondelettes adapfees aux caracferistiques de 
15 differentes zones d'une image ; 

la figure 3 d6crit le principe de partitionnement de l'image de la figure 2 en 
differentes zones, selon une technique de type quadtree, lorsque l'image est 
une image d'erreur ; 

la figure 4 pfesente un exemple de maillage regulier dense appliqu6 a une 
20 image selon 1'invention ; 

les figures 5a a 5g illustrent differentes etapes de subdivision du maillage 
d'une image mises en ceuvre dans le cadre de 1'invention ; 
la figure 6 pfesente le principe de gestion des bords dans le cadre de 
1'invention ; 

25 - les figures 7a a 7d illustrent les differents schemas d'ondelettes qui peuvent 
etre appliques aux differentes zones d'une image selon 1'invention. 
Le principe gendral de 1'invention repose sur Implication de differents 
types d'ondelettes, et notamment d'ondelettes de deuxfeme generation, a 
differentes zones d'une image, de facon a optimiser le codage global de l'image, 
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en choisissant un type d'ondelettes dont les propri6tes de codage sont adaptees au 
contenu de la zone consid£ree. 

Prealablement a la description d'un mode de realisation detaille de 
l'invention, on commence tout d'abord par faire quelques rappels succincts sur le 
5 codage video, ainsi que sur les notions de maillage, de lifting et d'ondelettes de 
deuxieme generation. En effet, l'invention peut notamment etre mise en ceuvre 
dans le contexte general du codage d'une s6quence video, qui repose sur ces 
differentes notions. 

Le principe general du codage video, qui est par exemple decrit dans le 
10 document ISO/TEC (ITU-T SG8) JTC1/SC29 WG1 (JPEG/JBIG), JPEG2000 Part 
I Final Committee Draft, Document N1646R, Mars 2000 consiste a decrire une 
video numenque sous la forme d'une succession d'images representees dans le 
plan YUV (Luminance/Chrominance r/Chrominance b), echantillonnees de 
maniere diverse (4:4:4 / 4:2:2 / 4:2:0. . .). Le systeme de codage consiste a changer 
15 cette representation en tenant compte des redondances spatiales et temporelles 
dans les images successives. On applique done des transformations (de type DCT 
ou ondelettes par exemple) pour obtenir une sene d'images inter-dependantes. 

Ces images sont « rangees » dans l'ordre I/B/P, ou chaque type d'image a 
des propriety bien determin&s. Les images I, encore appelees images « intras », 
20 sont codees de la meme facon que des images fixes et servent de reference aux 
autres images de la sequence. Les images P, encore appelees images « predites », 
contiennent deux types d'informations : une information d'erreur compensee en 
mouvement et les vecteurs mouvements. Ces deux informations sont deduites 
d'une ou plusieurs images precedentes qui peuvent etre de type I, ou de type P. 
25 Les images B, encore appelees images « bidirectionnelles », contiennent elles 
aussi ces deux informations, mais sont basees sur deux references, a savoir une 
reference arriere et une reference avant, qui peuvent etre de type I, ou de type P. 

Des lors, il suffit de transmettre l'image intra « I » codee de maniere 
classique, puis les vecteurs mouvements et les erreurs relatifs a chaque image 
30 successive, pour pouvoir restituer I'int6gralit6 de la sequence video considered 
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Les techniques connues de codage d'images fixes ou de sequences video 
reposent egalement sur 1'utilisation de maillages hierarchiques, que Ton associe 
aux images h coder. Ainsi, considerons une image fixe, par exemple codee en 
niveaux de gris. L' image peut etre considfree comme une representation 

5 discretisee d'une surface parametrique. On peut done appliquer, soit sur une zone 
de 1'image, soit sur Timage entire, un maillage quelconque. Par subdivision 
hierarchique (qui peut etre adaptative ou non), on fait evoluer ce maillage de 
maniere reguliere ou irr6guliere. On dispose ainsi d'une « hierarchie », en 
subdivisant le maillage dans les seules regions de Timage od l'erreur calculee est 

10 superieure a un seuil predetermine. Un aper$u general des techniques h base de 
maillages est egalement presente dans le document ISO/IEC (ITU-T SG8) 
JTC1/SC29 WG1 (JPEG/JBIG), JPEG2000 Part I Final Committee Draft, 
Document N1646R, Mars 2000. 

Certaines techniques de codage d'images reposent egalement sur une 

15 methode de decomposition par ondelettes particuliere, appelee "lifting", decrite 
notamment par W. Sweldens "The Lifting Scheme : A New Philosophy in Bi 
Orthogonal Wavelets Constructions", Proc. SPIE 2529, 1995, pp 68-69 (en 
fran9ais "Le schema "lifting": une nouvelle philosophic pour les constructions par 
ondelettes bi-orthogonales"). Le lifting est apparu depuis peu et s'impose comme 

20 une methode de decomposition par ondelettes plus simple et plus rapide que la 
m6thode usuelle, convolutive. Elle permet une reconstruction simple, par de 
simples operations lignes/colonnes sur la matrice d'analyse. 

On presente, en relation avec les figures la et lb, les schemas g^neraux de 
la decomposition "lifting", ainsi que la forme de la matrice polyphase associee. 

25 La methode generale consiste & separer 1 1 le signal en 2 echantillons pairs 

12 et impairs 13 et & predire les echantillons impairs en fonction des echantillons 
pairs. Une fois la prediction r6alis6e, une mise a jour du signal est effectuee afin 
d'en preserver les proprietes initiales. Cet algorithme peut etre it€v6 autant de fois 
que voulu. La representation par lifting conduit & la notion de matrice polyphase, 

30 qui permet Fanalyse 14 et la synthese 15 du signal. 
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La figure lb illustre plus precisement le schema "lifting" concatSne avec la 
matrice polyphase P(z) telle que : 



5 avec S;(z) et t;(z) deux polynomes de Laurent, et A et B des coefficients de 
normalisation. 

On rappelle enfin que les ondelettes de deuxieme generation, qui peuvent 
notamment etre mises en ceuvre dans le cadre de la pr&ente invention, constituent 
une nouvelle transformation, issue du monde mathematique. 

10 Cette transformation a ete introduite en premier lieu par W. Dahmen 

("Decomposition of refinable spaces and applications to operator equations", 
Numer. Algor., N°5, 1993, pp.229-245, en frangais "decomposition d'espaces 
pouvant etre raffinSs et applications aux equations d'opfrateur") et J. M. Carnicer, 
W. Dahmen et J.M. Pena ("Local decomposition of refinable spaces", Appl. 

15 Comp. Harm. Anal. 3, 1996, pp. 127-153, en fran?ais "decomposition locale 
d'espaces pouvant etre raffines") puis developpee par W.Sweldens ('The Lifting 
Scheme : A Construction of Second Generation Wavelets", Nov 1996, SIAM 
Journal on Mathematical Analysis, en fran?ais "Le schema "lifting" : une 
construction d'ondelettes de deuxieme g6n6ration") et W. Sweldens & P. Schroder 

20 ("Building Your Own Wavelet at Home", Chapter 2, Technical report 1995, 
Industrial Mathematics Initiative, en fran?ais "Construisez vos propres ondelettes 
chez vous"). 



25 moyennee. Le produit vectoriel habituellement utilise sur L 2 (R) devient un produit 
vectoriel interne pondere. Ces ondelettes sont particulierement bien adaptees pour 
les analyses sur des supports compacts et sur les intervalles. Elles conservent 
cependant les proprietes des ondelettes de premi&re generation, & savoir une bonne 




Ces ondelettes sont construites k partir d'une subdivision irr6guliere de 
1'espace d'analyse, et sont basees sur une methode d'interpolation ponderee et 
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localisation temps/frequence et une bonne rapidit6 de calculs, car elles sont 
construites autour de la methode lifting exposee pr6cedemment. 

M. Lounsbery, T> DeRose, et J. Warren dans "Multiresolution Analysis for 
Surfaces of Arbitrary Topological Type", ACM Transactions on Graphics, 1994 

5 (en fran?ais "Analyse multiresolution de surfaces de type topologique arbitrage") 
ont envisage d'appliquer ces ondelettes sur une structure surfacique quelconque. 
Dans le cadre de la presente invention, ces ondelettes sont appliquees sur un 
maillage, qui constitue une surface dont la topologie peut etre quelconque. 

Pour definir de manure exacte ces ondelettes de deuxieme generation, on 

10 peut tout d'abord rappeler les proprietes que ces dernieres ont en commun avec les 
ondelettes dites de premiere generation, puis indiquer les propri6t6s 
supplemental que ces ondelettes de deuxieme gyration presentent, et qui sont 
notamment exploitees dans le cadre de la pr6sente invention. 

Proprietes communes aux o ndelettes de premiere et de deuxieme 

15 generation : 

PI : Les ondelettes ferment une base de Riez sur L 2 (R), ainsi qu'une 
base « uniforme » pour une grande vari&e d'espace de fonctions, 
tel que les espaces de Lebesgue, Lipchitz, Sobolev et Besov. Cela 
signifie que toute fonction des espaces cites peut etre decompose 
20 sur une base d'ondelettes, et cette decomposition convergera 

uniformement en norme (la norme de l'espace de depart) vers cette 
fonction. 

P2 : Les coefficients de decomposition sur la base uniforme sont connus 
(ou peuvent etre trouves simplement). Soit les ondelettes sont 
25 orthogonales, soit les ondelettes duales sont connues (dans le cas 

bi-orthogonal). 

P3 : Les ondelettes, ainsi que leur duales, ont des proprietes locales en 
espace et en frequence. Certaines ondelettes sont meme k support 
compact (la presente invention utilise pr£f6rentiellement, mais non 
30 exclusivement, de telles ondelettes). Les proprietes de localisation 
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en frequence decoulent directement de la regularite de l'ondelette 
(pour les hautes frequences) et du nombre de moments 
polynomiaux nuls (pour les basses frequences). 
P4 : Les ondelettes peuvent etre utilisees en analyse multiresolution. 
5 Cela conduit a la FWT (Fast Wavelet transform, en francais, 

"transformee en ondelettes rapide"), qui permet de passer de la 
fonction aux coefficients ondelettes en « temps lineaire ». 
PmpriPtPQ sup plemental naracterisant leg, ondelettes de seconde generation : 

Ql : Mors que les ondelettes de premiere generation donnent des bases 
10 pour des fonctions d6finies sur R", certaines applications 

(segmentation de donnees, solutions des equations aux derivees 
partielles sur des domaines generaux, ou application des ondelettes 
sur un maillage a topologie arbitraire...), necessitent des ondelettes 
denies sur des domaines de R" arbitraires, tels que les courbes, les 
15 surfaces ou les variet6s ; 

Q2 : La diagonalisation des formes differentielles, 1' analyse des courbes 
et des surfaces, et les approximations ponderees, necessitent une 
base adaptee aux mesures ponderees. Cependant, les ondelettes de 
premiere generation ne fournissent de bases que pour les espaces 
20 avec des mesures invariantes par translation (typiquement les 

mesures de Lebesgue) ; 
Q3 : Beaucoup de problemes reels necessitent des algorithmes adaptes 
pour les donnees a echantillonnage irregulier, alors que les 
ondelettes de premiere generation ne permettent qu'une analyse sur 
25 les donnees echantillonnees de maniere r£guli£re. 

Ainsi, pour resumer la construction des ondelettes de deuxieme generation, 
on peut mettre en avant les principes ci-dessous. 

Lors de 1' analyse multiresolution, on pose que l'espace traditionnelle oil 
evoluent les fonctions d'6chelle sont les V^ , tels que : 
30 [JV k =L 2 (X) 
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On agrandit l'espace d'analyse, en se placant dans un Banach (note" B). On a done, 
pour les ondelettes de deuxieme genera tion : 

k 

On definit, dans le Banach, au sens des distributions, un produit scalaire 
5 permettant de redefinir les espaces duaux. La condition de raffinement devient 
(sous forme matricielle) : 

(j) k - ] = P(j> k 

ou P est une matrice quelconque. 

Apr&s ces quelques rappels des notions necessaires a l'apprehension des 
10 techniques de codage video, on pr^sente desormais plus en detail le principe 
gendral de 1'invention en relation avec la figure 2. 

On considSre l'image referencee 21, qui peut etre une image fixe, ou Tune 
des images d'une sequence vid6o, que Ton souhaite coder. Un maillage 
hierarchique reference 23 lui est associ6. Sur la figure 2, ce maillage est un 
15 maillage regulier qui ne recouvre que partiellement l'image 21. Le maillage peut 
bien sur egalement etre un maillage irregulier et/ou recouvrir l'integralite de 
rimage21. 

Le principe general de l'invention consiste a identifier, au sein de Timage 
21, des zones de natures differentes, auxquelles on choisit d'appliquer des types 
20 d'ondelettes distincts, dont les proprietes sont bien adaptees au contenu de la zone 
consideree. Ainsi, on peut realiser une partition de l'image 21 de la figure 2, en 
une pluralite de zones 22, respectivement rdferencees Tl, T2 et T3. 

Autant que faire se peut, ces zones references Tl, T2 et T3 sont 
construites sous forme de blocs rectangulaires, pour faciliter leur traitement, ou 
25 d'ensembles de blocs rectangulaires agglomeres. 

Ainsi, la zone referencee T3 de Tensemble 22, qui correspond au soleil 24 
de l'image 21 est un rectangle englobant le soleil 24. En revanche, la zone 
referencee Tl, qui correspond au relief irregulier 25 de l'image 21, a une forme en 
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escalier, qui correspond a un ensemble de blocs paraltelepipediques suivant au 
mieux les formes du relief 25. 

La zone Tl est une zone de texture de Timage 21, alors que la zone T2 
englobe des singularites isolees de I'image 21, et que le soleil de la zone T3 est 
5 principalement defini par des contours. 

Selon Tinvention, on choisit done le type d'ondelettes qui convient le 
mieux au codage de chacune de ces zones. Dans un mode de realisation particulier 
de Tinvention, pour la zone de texture Tl, on choisira ainsi d'appliquer une 
ondelette de type Butterfly, alors que les zones de singularite T2 et de contours T3 
10 seront pr£f6rentiellement codees & partir respectivement d'ondelettes affines et 
d'ondelettes de Loop. 

De cette fagon, on peut optimiser, tant le codage de I'image 21, que sa 
qualite de restitution sur un terminal adapts. 

Le tableau ci-dessous r6sume les criteres de choix preferentiels selon 
15 Tinvention de differents types d'ondelettes, en fonction de la nature de la zone a 



coder. 



Type 
d'ondelette 


Nature de 
la zone 


Justifications 


Butterfly 


Texture 


Ondelette interpolate, et non polynomiale. Elle est C 1 par 
morceaux (derivable et a deriv£e continue) sur les zones 

r6gulieres. Elle chute a etre C' sur les somments du 
maillage de base. Elle est done plus adaptde sur les hautes 
frequences isoldes (done les textures) 


Loop 


Contours 


Ondelette approximate, polynomiale dans les zones 
regulieres. Elle est C 2 (deux fois dSrivables, et b dtrivie 
seconde continue). Eile respecte la courbure, et en cas de 
chute & etre C 2 , elle demeure C 1 (ce qui garantit le respect 
de la courbure). Elle est done adapt^e pour les contours et 
plus particulierement pour les objets naturels. 


Catmull-Clark 


Contours 


Meme type d'ondelette que l'ondelette de Loop, plus 
indiqude dans le cas des contours sur objet non naturel. La 
meme justification que pour les ondelettes de Loop 
s'applique pour les contours. 


Affine 


Singularites 


Ondelette txts courte, C°, qui permet de s'adapter 
rapidement & un point, sans besoin de coder autour de ce 
point. Elle s'adapte parfaitement aux cas des singularity. 
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D'autres types d'ondelettes peuvent bien sur egalement etre mis en ceuvre 
dans le cadre de Invention, qui n'est nullement limitee aux seuls types 
d'ondelettes et natures de zones d6crits dans le tableau ci-dessus. 

On notera que, dans le tableau ci-dessus, on distingue, en ce qui concerne 
5 les contours notamment, le cas des objets naturels de celui des objets non-naturels. 
En effet, les objets naturels sont determines par des contours plus incertains que 
les objets non naturels. Ainsi, frequentiellement, les objets naturels n'ont pas un 
pic bien defini, contrairement aux objets non naturels. II convient done de 
distinguer les deux cas, en fonction de Tobjet traite. 
10 Un critere de distinction de ces deux types d'objets peut par exemple etre 

obtenu par seuillage de l'image filtree par un filtre passe haut multidirectionnel 
applique sur les niveaux de gris associ6s au contour. 

On s'attache d£sormais & presenter un mode de realisation particulier de 
l'invention dans le contexte g6n6ral du codage d'une sequence vid6o, dont l'une 
15 des etapes particulieres correspond & la mise en ceuvre de Tinvention. 

Un tel codage s'appuie notamment sur les technique de codage video et de 
"lifting" decrites ci-dessus. 

On considere un schema de type I/(n)B/P, avec n positif ou nul, ou I 
ddsigne une image "intra", B une image bidirectionnelle et P une image predite. A 
20 titre d'exemple, on peut considerer que l'on met en ceuvre un codage de type 
MPEG, par exemple MPEG-4, sauf pour les images d'erreur, pour lesquelles on 
met en ceuvre l'invention, avec codage par maillage et ondelettes de deuxi£me 
generation. 

On pourrait bien sur egalement envisager de remplacer le codage MPEG-4 
25 par tout type de codage base sur des techniques dquivalentes, e'est-a-dire utilisant 
une prediction temporelle et une transformation en cosinus discrete (DCT) bas&s 
sur une structure de blocs, et les quantifications et codages entropiques pour les 
informations g^nerees. En particulier, un codage ITU-T/H.264 ou MPEG-4 AVC 
(tel que d6crit notamment dans Joint Final Committee Draft of Joint Video 
30 Specification (ITU-T Rec. H.264 | ISO/IEC 14496-10 AVC), Thomas Wiegand, 
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Klagenfurt, 22 juillet 2002) peut etre substitue au codage MPEG-4, sans se 
departir du cadre de la presente invention. 

Pour chaque image de la sequence video consideree entrant dans le 
dispositif de codage, ou codeur, ce dernier decide de la coder avec un module 
5 d'encodage MPEG-4 (avec ou sans optimisation debit distorsion), ou avec un 
module d'encodage specifique base sur une optimisation debit distorsion. On 
rappelle que Toptimisation debit distorsion permet de r6aliser un compromis entre 
la qualite de l'image et sa taille : un algorithme base sur l'optimisation debit 
distorsion permet done de r6aliser une optimisation en vue d'atteindre le meilleur 
10 compromis possible. 

L'estimation de mouvement des images de type P et B est mise en ceuvre 
selon la technique de "block matching" prevu dans la norme MPEG-4. 

Le codage de 1'erreur est quant & lui realise par la mise en ceuvre de 
rinvention. Une telle transformation des images d'erreur en ondelettes de 
15 deuxieme generation basee maillage conduit a une bonne representation des 
discontinues des images (contours , texture, singularites...), pour un cout de 
codage associee trfcs faible. L'invention permet done d'atteindre une tres bonne 
efficacite en compression, puisque, d'une part, elle prend en compte les difterents 
types de singularites des images et que, d'autre part, elle traite ces dernieres en 
20 choisissant un modele d'ondelettes adapte. 

La premiere etape du codage de la sequence vid6o a laquelle on s'int&esse 
dans cet conceme le codage des images "intras" I. Ce codage repose par exemple 
sur rutilisation d'une transformee DCT comme dans MPEG-4, ou sur Implication 
d'une methode de codage par ondelettes de premiere generation, telle que d&rite 
25 par exemple par W. Dahmen dans "Decomposition of refinable spaces and 
applications to operator equations", Numer. Algor., N°5, 1993, pp. 229—245 (en 
fran^ais "Decomposition d'espaces pouvant etre raffines et applications aux 
equations d'operateur"). 

La deuxieme etape du codage de la sequence video concerne quant k elle 
30 le codage des images predites P et des images bidirectionnelles B. On compense 
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d'abord ces images en mouvement par une m6thode classique 
estimation/compensation tel que par exemple, le "block matching" [d&rit par G.J. 
Sullivan et R.L. Baker dans "Motion compensation for video compression using 
control grid interpolation", International Conference on Acoustics, Speech, and 
5 Signal Processing, 1991. ICASSP-91, vol.4, pp 2713—2716, en frangais 
"Compensation de mouvement pour la compression viddo utilisant 
uneinterpolation de grille de controle"], puis on stocke les images d'erreur 
correspondantes. 

Ainsi, les images d'erreur sont obtenues par soustraction de 1'image exacte 

10 de la sequence et d'une image construite par compensation/estimation de 
mouvement. Si cette demise differe de l'image exacte, l'image d'erreur comprend 
done au moins une region d'erreur, qu'il convient de coder. Si au moins certaines 
parties de l'image exacte et de l'image obtenue par compensation de mouvement 
sont identiques, l'image d'erreur comprend egalement au moins une region 

15 sensiblement vide, pour laquelle il suffit de transmettre une valeur nulle lors de la 
transmission du flux de codage. 

Au cours d'une troisieme etape, on separe les informations d'erreurs et les 
informations de mouvement, et on s'interesse a la detection des regions d'erreur au 
sein de l'image d'erreur, via un seuillage. Si on pose « e » un seuil de tolerance, 

20 les regions d'erreurs sont reconnues comme etant toutes les regions de l'image 
d'erreur presentant une valeur superieure h. ce seuil. 

Dans une premiere variante de realisation de l'invention, ces regions 
d'erreurs sont regroupees par blocs (pour avoir des zones sous forme de 
quadrilateres). Le regroupement des blocs se fait en associant a chaque bloc au 

25 moins une caractSristique correspondant k des informations de textures, couleurs, 
de formes, de contours, de singularites isolees. Cette caracterisation permet de 
regrouper des blocs entre eux et de generer un partitionnement de l'image, sous 
forme de zones de natures distinctes, qui permettra de coder chaque zone de la 
partition suivant sa transformation optimale, par application du type d'ondelettes 

30 appropril 
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Dans une deuxi&me variante de r6alisation de Invention, illustree en 
figure 3, le partitionnement de I'image en zones de natures distinctes se fait selon 
une technique de type "quadtree". 

On considere une image 31, comprenant par exemple trois regions d'erreur 
5 r6ferencees 32 a 34. On opere par iterations successives (etape 1 a etape 4), en 
partitionnant I'image 3 1 en quatre zones carr6es, chacune de ces zones etant a son 
tout subdivisee en quatre sous-zones carrees, et ainsi de suite, jusqu'a ce que la 
maille carree ainsi obtenue puisse etre consideree comme incluse dans la region 
d'erreur reT6renc6e 32, 33 ou 34 de I'image 31. 
10 Apres que la detection des differents blocs d'erreur de I'image a ete realisee 

(selon l'une des deux variantes de realisation decrites ci-dessus), I'image est done 
decoup6e en zones de differentes natures, ainsi qu'illustre pr&edemment en 
relation avec la figure 2, qui sent coddes a l'aide d'ondelettes differentes, pour 
permettre d'optimiser le codage en fonction des proprietes de l'ondelette choisie. 
15 La nature d'une zone peut par exemple etre determinee par la densite du 

maillage qui la recouvre. Ainsi, si le maillage de la zone consideree est dense, on 
peut en deduire qu'il s'agit d'une zone de texture. 

Une zone comprenant des singularity de I'image est en revanche une zone 
dans laquelle le maillage est dense autour d'un point de I'image, puis tres peu 
20 dense sur les points voisins. Une zone de contour est quant a elle caracterisee par 
un maillage dense dans une direction. 

Au cours d'une quatrieme etape, apres que les zones (preferentiellement 
sous forme de quadrilateres) de natures distinctes de I'image ont €i€ determiners, 
on applique un maillage regulier dense sur chacune de ces zones, ainsi qu'illustre 
25 par la figure 4. La densite du maillage est un parametre ajustable en fonction de 
Timage. La figure 4 illustre un maillage regulier applique a une image 
representant un « cameraman ». Ce maillage est du type quinconce. II permet une 
subdivision irreguliere et l'emploi des ondelettes de seconde generation. 

Au cours d'une cinquieme 6tape de traitement, et selon une premiere 
30 variante de realisation, on part du maillage regulier dense de la figure 4 pour le 
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faire evoluer vers un maillage grassier « optimal » suivant des criteres debit- 
distorsions predetermines et en fonction des differentes propri6tes de la zone de 
1 'image consideree (zone de texture, zone de contours, ou zone de singularites par 
exemple). 

5 Les figures 5a & 5d illustrent revolution du maillage de la figure 4 aux 

iterations n°3, 6, 9 et 16 respectivement. 

Plus pr6cisement, apres lecture de Fimage et creation du maillage rSgulier 
de la figure 4, on procede par iterations successives consistant a realiser une 
optimisation L 2 des triangles du maillages, une fusion des triangles puis un 

10 permutation des aretes, encore appele "swapping". Les positions des nceuds du 
maillage sont ensuite quantifies et une optimisation g6ometrique est ensuite mise 
en oeuvre. II faut en effet verifier qu'aucune maille ne s'est retournee : on teste 
done chaque triangle (operation dite "de clockwise"). Une derniere quantification 
des points est necessaire. On revient ensuite a la quantification L 2 . Cette boucle 

15 est realisee autant de fois que souhaite, le nombre derations successives 
constituant un parametre personnalisable du codage. 

Les figures 5e a 5g illustrent cette cinquieme etape du codage de la 
sequence video dans le cas ou l'image consid£r6e est une image d'erreur. Ainsi, la 
figure 5e represente une image d'erreur extraite de la sequence video dite 

20 Foreman ; la figure 5f represente une image d'erreur extraite de la sequence 
Foreman maillee regulierement ; enfin, la figure 5g represente une image d'erreur 
extraite de la sequence Foreman maillee apres quelques iterations de 1'algorithme 
de recherche de zones de I'invention. 

Cette cinquieme etape du codage de la sequence video peut egalement etre 

25 mise en ceuvre selon une deuxieme variante de realisation, consistant & appliquer 
un maillage "grassier" a l'image consideree, puis & raffiner ce maillage grassier 
par subdivisions successives. Pour generer un tel maillage grassier, on place des 
points equidistants sur les contours, les textures, et les singularites de l'image, qui 
permettront ensuite de mailler judicieusement la zone h couvrir, i.e. de maniere 
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adaptative On realise ensuite une subdivision 1 vers 4 standard pour obtenir, par 
raffinement, le maillage semi r6gulier final. 

On peut par exemple prouder selon la technique decrite par P. Gioia dans 
"Reducing the number of wavelet coefficients by geometric partitioning", 
5 Computational Geometry, Theory and Applications Vol. 14, 1999, pp 25-48 (en 
fran^ais "Reduire le nombre de coefficients d'ondelettes par partition 
geometrique"). 

La sixieme &ape du codage de la sequence concerne la gestion des bords, 
ainsi qu'illustre par la figure 6. Pour ce faire, on utilise un homeomorphisme du 

10 maillage plan 61 (maillage quinconce) a un tore 62 (selon une methode dite par 
p£riodisation) ou encore une symetrisation classique des donn6es. Pour cela, on 
prolonge l'image en inversant les diagonales situ6es sur les frontieres 
problematiques (c'est-a-dire sur les frontieres qui ne sont pas orientees dans Tune 
des directions du maillage). L'approche periodisation et symetrisation severe 

15 importante en images car elle permet d'eviter de biaiser la distribution statistique 
des coefficients ondelettes a transmettre et done d'essayer de converger ainsi vers 
une loi bi-exponentielle 

Au cours d'une septieme etape, on applique les ondelettes de deuxieme 
generation sur le maillage de Timage. Pour cela, on applique par exemple la 

20 methode proposee par M. Lounsbery, T. DeRose, J. Warren "Multiresolution 
Analysis for Surfaces of Arbitrary Topological Type", ACM Transactions on 
Graphics, 1994 (en fran?ais "Analyse multiresolution pour des surfaces de type 
topologique arbitraire) avec les types d'ondelettes selectionn6s selon 'invention en 
fonction de la nature de la zone consideree (par exemple des ondelettes de Loop 

25 ou de Butterfly). 

L'ondelette est appliqu6e sur le maillage, en tenant compte d'une valeur 
scalaire associee au maillage au point de mise a jour de la zone (qui peut etre dans 
un exemple particulier le pont central), mais aussi en fonction de cette meme 
valeur scalaire aux points voisins. Cette valeur scalaire peut etre par exemple la 

30 luminance du point du maillage consider^, ou une composante de la chrominance 
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de ce meme point. II s'en suit une decomposition ponderSe par ondelettes, 
illustree par les figures 7a a Id. 

La figure 7a illustre une ondelette de Butterfly, dans laquelle le point 
central reference 70 indique le point duplication du maillage et ou les autres 
5 points representent les coefficients d' interpolation sur les points voisins du 
maillage. Comme indique precedemment, cette ondelette est particulierement 
adaptee pour la gestion des textures. 

En d'autres termes, on etudie les parametres caract&istiques du maillage 
(par exemple, la luminance de l'image en certains points), afin de determiner s'il 
10 est n6cessaire et/ou avantageux de rajouter un nceud supplemental reference 70, 
selon une 6tape d'analyse par ondelettes de deuxieme generation, telle que decrite 
par exemple dans l'article de M. Lounsbery, T. DeRose, et J. Warren cite 
precedemment. 

Les figures 7b a 7d illustrent respectivement des ondelettes de Loop, 

15 affines, et de Catmull-Clark. Le point reference 70 represente, sur ces differentes 
figures, le point duplication du maillage, encore appele point de mise I jours. 
Les autres points representent egalement les coefficients d'interpolation sur les 
points voisins du maillage. 

En procedant de la maniere decrite ci-dessus, on obtient done des 

20 coefficients d'ondelettes pour le maillage particulier de la zone de l'image 
considerfe. Cette operation est r^alisee sur toute l'image, et, dans le cas d'une 
sequence video, pour toutes les images P/B. On applique, sur chaque partie du 
maillage, Tondelette la mieux adaptte en fonction du type de donnees traitees (par 
exemple textures, contours, singularity, couleurs, formes, etc.). 

25 Comme indique precedemment, afin de determiner la nature de la zone 

concern6e, on peut raisonner sur la densite du maillage autour d'un point et d'une 
region autour de ce point. Ainsi, si en un point A de l'image le maillage est dense 
(par rapport a ses deux voisins successifs) mais qu' autour de cette region, le 
maillage est vide, on dira qu'il s'agit d'une singularity isolee. On appliquera alors 

30 par exemple une ondelette affine. Si, autour de cette region, le maillage est encore 
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dense, on dira qu'il s'agit d'une texture, et on appliquera preferentiellement une 
ondelette de Butterfly. Pour caracteriser les contours, on detectera la densite du 
maillage suivant une direction (si le maillage est dense selon une direction 
particuliere). 

5 Dans le cadre du codage d'une sequence video, on prend egalement en 

compte l'interdependance des images successives de la sequence : ainsi, lorsqu'on 
passe d'une image a l'autre, une partie (voire 1'ensemble) du maillage peut etre le 
meme. II convient done de ne transmettre, vers le terminal de decodage ou de 
restitution, que les noeuds du maillage qui ont change par rapport a l'image 

10 precedente de la sequence. Les autres nceuds seront considered par le codeur 
comme fixes. De la meme maniere, l'ondelette appliquee a un maillage particulier 
reste dans la plupart des cas invariante d'une image a l'autre. Dans le cas ou 
l'ondelette reste la meme, on ne transmet pas d'informations a ce niveau. 

Au cours d'une huitieme etape, on code les coefficients ondelettes obtenus 

15 precedemment : pour ce faire, on met en oeuvre une technique de type zero tree 
(telle que decrite par exemple par J.M Shapiro dans "Embedded Image Coding 
Using Zerotree of Wavelet Coefficients", IEEE Transactions on Signal 
Processing, Vol.41, NO. 12, decembre 1993, pp 3445—3461 (en francais "Codage 
d'image utilisant un zero tree de coefficients d'ondelettes")), ou une methode de 

20 type EBCOT (telle que presentee par exemple par D. Taubman dans "High 
Performance Scalable Image Compression with EBCOT", IEEE Transactions on 
Image Processing, Vol. 9, NO. 7, Juillet 2000 (en francais "Compression d'image 
echelonnable de haute performance avec EBCOT")), pour classifier et quantifier 
les coefficients d'ondelettes. 

25 La neuvieme etape du codage de la sequence video concerne la mise en 

forme de ces coefficients d'ondelettes. Elle peut etre realisee suivant la methode 
proposee dans le document ISO/IEC JTC 1/SC 29AVG 11, N4973, AFX 
Verification Model 8, Klagenfurt, Austria, July 2002, concernee par la 
normalisation MPEG4. Suivant les zones d'int6ret, ou les zones de fortes erreurs, 
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des paquets peuvent etre discrimines par rapport b d'autres lors de la reception et 
du decodage. 

Une autre methode consiste & transmettre les coefficients d'ondelettes par 
« ordre » de priorite, suivant la quantite d'erreur contenu dans le paquet. Ainsi, les 

5 donnees peuvent etre transmise sous la forme : N° du Paquet/information Header 
(nombre de coefficients, zone de l'image, nombre de plans de bit...)/Type 
d'ondelette/coefficients ondelettes/informations maillages. Les donn6es sont ainsi 
transmises vers le canal, puis sont revues pour decodage ou stockage. 

Selon Tinvention, on definit pr6ferentiellement une structure de signal, 

10 organise sous la forme de paquets consecutifs, chacun de ces paquets comprenant 
lui-meme les champs suivants : debut de paquet/N° Paquet/information 
Header/Types d'ondelettes/Coefficients d'ondeletttes/Forme du maillage/fin de 
paquet. 

Le champ N° paquet contient un identifiant du paquet qui est attribue par 
15 ordre suivant la taille du paquet. 

Le champ "Information header" (en fran?ais, "en-tete ^informations") 
comprend les sous-champs suivants : 

le nombre de coefficients d'ondelettes (nombre global dans la zone de 
l'image traitee) ; 

20 - la zone de l'image consid^ree (en fonction des informations fournies 
notamment par le champ "Forme du maillage") ; 

le nombre de plans de bits (utilises pour le codage des coefficients 
d'ondelettes). 

Le champ Type de l'ondelette indique si l'ondelette appliqu6e & la zone 
25 consideree est par exemple une ondelette de Loop, de Butterfly, de Catmull-Clark, 
ou encore une ondelette affine, ou de toute autre type choisi en fonction de la 
nature de la zone consideree. 

Le champ Forme du maillage permet quant & lui de transmettre le maillage 
de base (sous la forme d'un ensemble de sommets et d'aretes). 
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Si l'on considere par exemple une image a coder qui a ete partitionnee 
selon l'invention en deux zones de natures distinctes, la premiere zone ayant ete 
codee par ondelettes de Butterfly, et la seconde par ondelettes de Loop, le signal 
de l'invention vehiculant la sequence codee transmise est prefirentiellement de la 
5 forme : 

Debut d'image 

debut de paquet / N°145 / 250 coef / sommet5, arete2,4,5; sommet45, arete 
56,54.87... / 256 / butterfly / (10,25.14), (25,54.84).(...).(25.36.10) / fin de paquet 
debut de paquet / N°260 / 130 coef / sommetK arete8.41.5; sommet7. arete 
10 21.47.21... / 256 / loop / (1.5,8). (2,4,42),(...),(52,20.10) / fin de paquet 

Fin d'image 

L'invention prevoit egalement d'associer a chaque type d'ondelette un code 
predefini entre le codeur et le decodeur, de facon a simplifier le contenu du champ 
Type d'ondelettes. Ainsi, on peut envisager d'attribuer aux ondelettes de Loop 
1 5 Tidentifiant 1 , aux ondelettes de Butterfly, le 2, aux ondelettes de Catmull-clark, le 
3, et aux ondelettes affines, le 4. Le champ type d'ondelettes peut alors etre code 
sur 2 bits. 

La methode de decodage est la methode duale de la methode codage. Sur 
reception du signal vehiculant les paquets ci-dessus, le dispositif de decodage en 
20 extrait done les informations relatives au type d'ondelettes applique a chacune des 
zones definies pour 1'image, et applique un d6codage selectif de chacune de ces 
zones, en fonction du type d'ondelettes utilise lors du codage. 

On obtient done une image de qualite visuelle optimale, et ce a faible cout 

de codage. 

25 
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REVENDICATIONS 

1. Procecte de codage d'une image a laquelle est associe un maillage 
hierarchique, rnettant en ceuvre un codage dudit maillage par ondelettes, 
caracterise en ce qu'il met en ceuvre au moins deux types d'ondelettes 

5 appliquees selectivement a des zones distinctes de ladite image. 

2. Procede de codage selon la revendication 1, caracteris£ en ce qu'il 
comprend les etapes suivantes : 

une etape de partitionnement de ladite image en au moins deux zones 
de natures distinctes, la nature d'une zone 6tant fonction d'au moins un 
10 parametre caracteristique dudit maillage dans ladite zone ; 

pour chacune desdites zones, une etape d'affectation, au moins en 
fonction de ladite nature, d'un type d'ondelettes permettant d'optimiser 
ledit codage dudit maillage de ladite zone. 

3. Proced6 de codage selon la revendication 2, caracterise en ce que ledit 
15 parametre caracteristique dudit maillage tient compte de la densite dudit 

maillage dans ladite zone. 

4. Procede de codage selon Tune quelconque des revendications 2 et 3, 
caracterise en ce que ladite nature de ladite zone appartient au groupe 
comprenant : 

20 - au moins un type de texture ; 

au moins un type de contour ; 

au moins un type de singularity ; 

au moins un type de couleur ; 

au moins un type de forme. 
25 5. Procede de codage selon l'une quelconque des revendications 1 & 4, 
caracterise en ce que lesdits types d'ondelettes appartiennent au groupe 
comprenant : 

les ondelettes de Loop ; 

les ondelettes de Butterfly ; 
30 - les ondelettes de Catmull-clark ; 
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les ondelettes affines. 

6. Procdde de codage selon Tune quelconque des revendications 1 a 5, 
caracteris6 en ce qu'il comprend, pour chacune desdites zones, une etape 
^application audit maillage de coefficients dudit type d'ondelettes affecte a 

5 ladite zone, tenant compte d'une valeur scalaire associee audit maillage en un 
point de mise & jour de ladite zone et de ladite valeur scalaire associee audit 
maillage en au moins certains points voisins dudit point de mise a jour. 

7. Proced6 de codage selon la revendication 6, caracterisf en ce que 
ladite valeur scalaire reprSsente un parametre dudit maillage appartenant au 

10 groupe comprenant : 

la luminance dudit maillage ; 

au moins une composante de chrominance dudit maillage. 

8. Proc6d6 de codage selon Tune quelconque des revendications 6 et 7, 
caracterise en ce qu'il comprend en outre une etape de codage desdits 

15 coefficients d'ondelettes mettant en ceuvre une technique appartenant au groupe 
comprenant : 

une technique de type zero-tree ; 
une technique de type EBCOT. 

9. Precede de codage selon Tune quelconque des revendications 6 a 8, 
20 caracterise en ce que, ladite image appartenant & une sequence d'images 

successives, ledit proc6de comprend en outre une 6tape de comparaison desdits 
coefficients d'ondelettes de ladite image aux coefficients d'ondelettes d'au 
moins une image precedente ou suivante de ladite sequence, de fa?on a eviter 
de mettre en ceuvre ladite etape de codage pour des coefficients d'ondelettes de 
25 ladite image identiques & ceux de ladite image precedente ou suivante. 

10. Procede de codage selon Tune quelconque des revendications 1 a 9, 
caracterise en ce qu'il permet de coder une sequence d'images successives, 

et en ce que ladite image est une image d'erreur, obtenue par comparaison 
d'une image originale de ladite sequence et d'une image construite par 
30 estimation/compensation de mouvement, ladite image comprenant au moins 
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une region d'erreur & coder et £ventuellement au moins une region 
sensiblement vide. 

11. Procede de codage selon la revendication 10, caracterise en ce que 
ladite etape de partitionnement comprend une £tape de detection desdites 

5 regions d'erreur de ladite image par seuillage, permettant de determiner au 
moins une region de ladite image presentant une erreur superieure b un seuil 
predetermine. 

12. Procede de codage selon la revendication 11, caracterise en ce que 
ladite 6tape de partitionnement comprend egalement une 6tape de 

10 regroupement d'au moins certaines desdites regions d'erreur detect6es par blocs 
de forme parall£lipipedique. 

13. Procede de codage selon la revendication 12, caracterise en ce que 
ladite etape de partitionnement comprend une etape de creation desdites zones 
de ladite image sous forme d'ensembles de blocs de meme nature. 

15 14. Procede de codage selon la revendication 11, caracterise en ce que 
ladite 6tape de partitionnement comprend une etape de creation desdites zones 
de ladite image a partir desdites regions d'erreur detectdes, mettant en oeuvre 
une technique de type quadtree. 

15. Procede de d6codage d'une image i laquelle est associe un maillage 
20 hierarchique code par ondelettes, 

caracterise en ce qu'il met en oeuvre un d£codage selectif de zones distinctes de 
ladite image, en fonction d'informations relatives & un type d'ondelettes affecte 
au codage du maillage de chacune desdites zones. 

16. Dispositif de codage d'une image & laquelle est associe un maillage 
25 hierarchique, mettant en oeuvre des moyens de codage dudit maillage par 

ondelettes, 

caracterise en ce qu'il comprend des moyens d'application selective d'au moins 
deux types d'ondelettes & des zones distinctes de ladite image. 

17. Dispositif de decodage d'une image a laquelle est associe un maillage 
30 hierarchique cod£ par ondelettes, caracterise en ce qu'il comprend des moyens 
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de decodage selectif de zones distinctes de ladite image, en fonction 
^informations relatives a un type d'ondelettes affect^ au codage du maillage de 
chacune desdites zones. 

18. Signal representatif d'une image & laquelle est assocte un maillage 
hierarchique cod6 par ondelettes, 

caract6ris£ en ce qu'au moins deux types d'ondelettes ayant ete appliques 
selectivement & des zones distinctes de ladite image lors du codage, ledit signal 
vdhicule des informations relatives audit type d'ondelettes affecte au codage du 
maillage de chacune desdites zones, 

19. Signal selon la revendication 18, caracterisd en ce qu'il est structure 
sous forme de paquets associes chacun a Tune desdites zones de ladite image, 
chacun desdits paquets comprenant les champs suivants : 

un champ indicatif d'un debut de paquet ; 

un champ vehiculant un identifiant dudit paquet ; 

un champ d'en-tete d'informations (en anglais "information header") ; 

un champ comprenant lesdites informations relatives audit type 

d'ondelettes affect^ I ladite zone ; 

un champ comprenant des coefficients d'ondelettes appliques audit 
maillage de ladite zone ; 

un champ relatif a la forme dudit maillage de ladite image ; 
un champ indicatif d'une fin de paquet. 

20. Signal selon la revendication 19, caracterise en ce que ledit champ 
d'en-tete d'informations comprend : 

un sous-champ relatif au nombre de coefficients d'ondelettes de ladite 
zone ; 

un sous-champ indiquant ladite zone de ladite image, en fonction de 
ladite forme dudit maillage ; 

un sous-champ relatif au nombre de plans de bits mis en ceuvre pour 
lesdits coefficients d'ondelettes. 
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21. Application du proc^de de codage selon Tune quelconque des 
revendications 1 a 14 et du procede de decodage selon la revendication 15 a 
Tun au moins des domaines appartenant au groupe comprenant : 

le "streaming" video (en fran?ais, "emission d'un flux video") ; 

le stockage des videos ; 

la visioconference ; 

la video a la demande (en anglais VOD pour "Video On Demand") ; 
les mels video. 
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Fig. 4 
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Fig. 5b 




Fig. 5c 
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Fig. 5e 
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